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Résumé : Nous définissons le front d'onde d'un vecteur-distribution pour une représentation 
unitaire d'un groupe de Lie réel G à l'aide du calcul pseudo-différentiel mis au point dans un travail 
antérieur [M2]. Cette notion précise celle de front d'onde d'une représentation introduite par R. 
Howe [Hw]. En application nous donnons une condition suffisante pour qu'un vecteur-distribution 
reste un vecteur-distribution pour la restriction de la représentation à un sous-groupe fermé H, 
et nous donnons un théorème de propagation des singularités pour les vecteurs-distribution. 

Abstract : We define the wave front set of a distribution vector of a unitary représentation in 
terms of pseudo-differential-like operators [M2]for any real Lie group G. This rennes the notion 
of wave front set of a représentation introduced by R. Howe [Hw]. We give as an application a 
necessary condition so that a distribution vector remains a distribution vector for the restriction 
of the représentation to a closed subgroup H, and we give a propagation of singularities theorem 
for distribution vectors. 
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Introduction 



Cet article est la suite d'un travail récent [M4] dans lequel était développée la notion 
de front d'onde d'une représentation unitaire [Hw]. Nous étendons ici la notion de front 
d'onde aux vecteurs-distribution. 

La définition du front d'onde d'une distribution sur une variété M est due à L. 
Hormander, qui en donne également une caractérisation à l'aide des opérateurs pseudo- 
différentiels [Hr2 th. 18.1.27] : le front d'onde est une partie conique fermée du fibré 
cotangent privé de la section nulle T*M — {0}, donnée par : 

(*) WF(u) = p| char P, 

où P parcourt l'ensemble des opérateurs pseudo-différentiels d'ordre zéro tels que Pu G 
C°°(M), et charP désigne l'ensemble des (x, £) G T*M — {0} tels que le symbole p de 
P vérifie : lim mîp(x,t£) = lorsque t — > +oo (voir aussi [T § VI. 1]). Pour un réel s 
quelconque le front d'onde d'ordre s de la distribution u est défini de la même manière, 
l'intersection s'étendant à tous les o.p.d. P d'ordre zéro tels que Pu appartienne à l'espace 
de Sobolev Hl° c (M) [D-H § 6.1]. 

Or nous avons défini ([M2], cf. § II.2) pour toute représentation unitaire rr d'un groupe 
de Lie réel G des opérateurs pseudo-différentiels sur l'espace de la représentation, dont 
le symbole est une fonction C°° sur la variété de Poisson linéaire g* (ces opérateurs sont 
l'image par tt d'opérateurs pseudo-différentiels invariants sur le groupe, cf. [Mel], [Stk]) : 
pour tout p G C°°(g*) tel que sa transformée de Fourier soit une distribution à support 
compact contenu dans un voisinage exponentiel de dans l'algèbre de Lie g on définit 
l'opérateur p w,1T de domaine H™ par : 

< p w '*u, v >=< ip, C UiV> 

pour tout u G et v G H n . Ici C UjV désigne le coefficient < tt(.)u, v > et ip est donnée 
par : 

j G . exp* ip = T~ x p, 

où je désigne le jacobien de l'exponentielle. Il est donc naturel de définir (§ II.3) le front 
d'onde d'un vecteur-distribution par une formule analogue à (*) : 

(**) WF{u) = P| char p, 

où p parcourt l'ensemble des symboles d'ordre zéro tels que p w,1T u soit un vecteur C°°, et 
où charp désigne l'ensemble des directions dans g* où p s'annule à l'infini. Nous définissons 
également le front d'onde d'ordre s à l'aide des espaces de Sobolev- Goodman [Go] dont 
nous rappelons la définition au § II. 1. 

Le front d'onde d'un vecteur-distribution est un cône fermé Ad* G-invariant de g* — 
{0}. Ceci raffine la notion de front d'onde d'une représentation unitaire introduite par R. 
Howe [Hw], en ce sens que l'on a l'inclusion : 

WF{u) C -WF%. 
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Nous donnons également au § II.4 une caractérisation du front d'onde de R. Howe en 
termes d'opérateurs pseudo-différentiels : 

WFl = - p| char p, 

où p parcourt l'ensemble des symboles d'ordre zéro tels que p w,1T soit un opérateur régulari- 
sant. Le signe moins est un simple artifice de convention. 

En application nous donnons au § II.5 une condition suffisante pour qu'un vecteur- 
distribution soit encore un vecteur-distribution pour la restriction de ir à un sous-groupe 
fermé H : 

Théorème II.5.2. 

1 ). Soit u G H°° . Considérant alors u comme un vecteur-distribution de n on a l'inclusion : 

WF{u) C fj x . 

2). Soit v G Tt~°°. Alors si WF(v) fl f) = le vecteur-distribution v est un vecteur- 
distribution pour la restriction ir i . 

\h 

Nous donnons également une condition suffisante sur une distribution <p à support compact 
sur G pour que 7r(<p)u soit un vecteur C°° : définissant WJF(w) comme la partie conique 
de T*G — {0} formée par les translatés (à gauche ou à droite) de WF(u) on a le résultat 
suivant : 

Proposition II. 4. 4. 

Supposons que TC^ soit un espace de Hilbert séparable. Soit u G 7i~°° . Alors pour toute 
distribution <p G £'{G) telle que : 

WF(ip) n WF(u) = 0, 

on a : 

Le résultat central de cet article est le théorème de propagation des singularités III.3.1, 
qui entraîne (corollaire III. 3. 5) que pour un symbole à valeurs réelles p la différence des 
deux fronts d'onde : 

WF{u)\WF{p w ^u) 

est invariante par le flot du champ hamiltonien défini par le symbole principal p m . La 
démonstration est parallèle à celle donnée dans [T§ VI. 1] pour les distributions, et repose 
sur une forme faible de l'inégalité de Gârding précisée (Théorème III. 2.1). 

La première partie est consacrée au calcul fonctionnel holomorphe pour des symboles 
elliptiques. Nous avons repris la construction de M. A. Shubin [Shu] en suivant la suggestion 
de R. Strichartz [St] de considérer des fonctions holomorphes dans un secteur du plan 
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complexe plus générales que t h- > t z . Le défaut de cette approche est de limiter le calcul 
fonctionnel holomorphe à des symboles polynomiaux (ou, si l'on veut, aux opérateurs 
différentiels). La méthode de R. Seeley [S] s'applique à tout o.p.d. elliptique, mais nous 
n'avons pas su adapter sa méthode à notre cadre. La difficulté provient de la nécessité de 
se limiter à des symboles dont la transformée de Fourier inverse est à support compact, ce 
qui oblige à couper les hautes fréquences à chaque étape de la construction de la résolvante 
approchée. Cette restriction n'ayant pas lieu d'être dans le cas nilpotent simplement 
connexe [M3] on peut donc définir dans ce cas précis un calcul fonctionnel holomorphe 
pour tout symbole elliptique, polynomial ou non. 

Ce calcul fonctionnel est nécessaire pour montrer la continuité Sobolev de H.% dans 
H%~ m des opérateurs p w,7r où p est un symbole d'ordre m (proposition II.2.1), contraire- 
ment au cas des distributions sur une variété, où ce résultat se montre directement [T. th. 
II.6.5]. Il repose quant à lui sur une variante à paramètre du calcul symbolique (Théorème 
1.2.4) sur g*, que nous développons en appendice. Nous reprenons [Ml th. 4.2] en inclu- 
ant le paramètre et en apportant quelques simplifications et corrections (voir la remarque 
suivant le théorème 1.1.2). 

Notations : 

(0.1). On désignera par G un groupe de Lie réel connexe de dimension n, d'algèbre de Lie 
et de dual q* . On désigne par dx une mesure de Lebesgue sur g, et par dg une mesure 
de Haar à gauche sur G normalisée de telle façon que le jacobien je de l'exponentielle 
s'écrive : 

^ g — ad x 

jo{x) = I**<^d5->l 

On désigne par Aq = det Ad g la fonction module. Par le choix de la mesure de Haar dg 
nous identifierons l'espace C°°(G) et l'espace des densités C°° sur G. Par dualité l'espace 
des distributions sur G s'identifie à l'espace des fonctions généralisées sur G. 

(0.2). On désignera par T*G\{0} le fibré cotangent de G privé de la section nulle. Une 
partie C de T*G\{0} est conique si pour tout (#,£) G C, (g,t£) G C pour tout réel t > 0. 
On notera alors — C l'ensemble des {(g, — £), (g,£) G C}. 

(0.3). On désignera par n une représentation unitaire fortement continue du groupe de 
Lie G dans un espace de Hilbert séparable qui sera noté H n . On désignera alors par 7i£° 
l'espace des vecteurs indéfiniment différentiables de la représentation. L'espace H™ est 
constitué des vecteurs u tels que pour tout v G H n le coefficient : 

C u , v : g i — >< w(g)u, v > 

soit C°° sur G. Son dual est l'espace des vecteurs-distribution. 

(0.4). On définit pour tout <p G S' (G) l'opérateur (en général non borné) 7r(<p) de domaine 
par la formule : 

< n((p)u, v >=< ip, C UjV > 

(Voir [J0] pour une définition dans le cadre général des représentations dans un espace de 
Banach). 
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(0.5). Pour toute distribution <p G S' (G) on pose : 

<p* = /S.Q.i*Lp 

où A g désigne la fonction module et % le difféomorphisme g \— > <7 _1 . On a pour tout couple 
(u, u) dans 7i£° : 

< ir((p)u, v >=< u,7r(cp*)v > . 
I. Calcul fonctionnel holomorphe pour des symboles elliptiques 



1.1. Rappels sur le calcul symbolique 

Soit G un groupe de Lie réel connexe, g son algèbre de Lie et g* son dual, que nous 
verrons comme une variété de Poisson linéaire munie du crochet de Poisson : 

{/,</}(£) =< C, [Df(t),Dg(t)]>. 

Soit Q un voisinage compact de dans g. On désigne par S™ (g*), m G M, p G]0, 1], la 
classe de symboles constituée par les fonctions p G C°°(0*) vérifiant les estimations : 

1^X01 <c a .(i + ||eil 2 )^ (m - Ha|) . 

Cet espace, muni des semi-normes N a définies comme étant les meilleures constantes C a 
possibles, est un espace de Fréchet. On désignera par AS 7 ^ ,( ^(g*) le sous-espace fermé de 
S™ (g*) des symboles p tels que supp T~ x p C Q, et par AS™ (g*) la réunion des AS™'® (g*), 
Q parcourant l'ensemble des voisinages compacts de dans g. On rappelle deux résultats 
de [Ml] (Theorem 2.1 et Theorem 4.2) : 

Proposition 1.1.1 (Théorème d'approximation). 

Soit Q un voisinage compact de dans g, et soit x £ C°°(g) à support dans Q telle que 
X = 1 au voisinage de 0. Alors l'opérateur sur C°°(g*) défini par : 

est continu de S™ (g*) dans AS™> Q (g*), et I -T Q est continu de S™ (g*) dans l'espace de 
Schwartz S (g*). 
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Proposition 1.1.2 (Calcul symbolique). 

Soit K un voisinage compact exponentiel de dans q, assez petit pour que (expK) 2 soit 
l'image difféomorphe d'un voisinage K 2 de dans g. Alors si p > | il existe un voisinage 
compact Q de dans g tel que la loi # définie à partir de la convolution * sur le groupe 
par : 

exp^Jë 1 -^" 1 ^) oexp^jQ 1 ^" 1 ?) = exp^j^ 1 ^- 1 ^^)) 
s'étend en une correspondance bilinéaire continue : 

AS^' Q (q*) x AS™ 2 ' Q (g*) — > AS™ 1+m2 ' Q V)- 
De plus on a le développement asymptotique : 

N 

p#q = Ck & q "> + r n(pi q) 



où les Cfc sont des opérateurs bi-différentiels avec : 

Co(p, q) = pq, Ci(p, q) = \{p, q}, 
les Ck (resp. Rn) étant par ailleurs continus de AS™ 1 '® (g*) x AS™ 2 'Q{q*) dans la classe 

^m 1 +m 2 -k(2p-l),Q+Q ^m 1 +m 2 -(N+l)(2p-l),(Q+Q)UQ 2 

Remarque : le théorème n'est pas vrai a priori pour le voisinage compact K lui-même, 
contrairement à ce qui est dit par erreur dans l'énoncé du théorème 4.2 de [Ml]. La 
démonstration du lemme III. 8 de [Ml] nécessite en effet un voisinage compact Q plus petit 
(voir le lemme A. 6 pour la variante avec paramètre), ce qui n'est nullement restrictif dans 
les applications. 

On a également une variante à paramètre du théorème d'approximation, tirée de [M2] 
(Théorème 1.2.2) : 

Proposition 1.1.3 (Théorème d'approximation à paramètre). 

Soit (p\)\ e j> une famille de symboles, où l'ensemble de paramètres V est cône dans un 
espace vectoriel normé (typiquement, V = 1R + ou un secteur de C). On suppose que p\ 
appartient à S 1 ™ (g*) pour tout X, et qu'on a en plus les estimations : 

\D a Px (0\ < C Q (1 + ||£|| 2 )è(™-"H)(i + ||A|| 2 )^ m '- p ' |Q|) 

avec m' G H. et p' > 0. Alors pour tout N G N et tout multi-indice a il existe Cn, ol telle 
que : 

\D a ((i -tQ) Px )(o <c N , a (i + u\\ 2 r N (i + \m 2 r N . 
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Le passage du cas V = M + traité dans [M2] au cas général ci-dessus est immédiat. 

1.2. Une résolvante approchée 

Soit p E AS™'® (q*) avec m > 0, p > \ et Q voisinage compact de dans jj satisfaisant 
les hypothèses de la proposition 1.1.2. On suppose que p est elliptique, c'est-à-dire qu'il 
existe R > tel que pour ||£|| > R on a : 

c^i + U\\ 2 )^ < \p(0\ < c 2 (i + U\\ 2 )^ ■ 

Soit V un secteur angulaire de C tel que pour ||£|| assez grand p(£) ne prenne pas ses 
valeurs dans un voisinage conique de V. Nous allons construire une paramétrixe pour le 
symbole à paramètre : 

Px = P - A, A G V. 

On posera : 

A(0 = (l + ll£ll 2 )i A^,A) = (l + ||a 2 + |AR)i 

Lemme 1.2.1. 

On a l'estimation pour |£| assez grand : 

dA m (£,Ar < MOI < C 2 A m (£, A)™ 

Démonstration. On a l'encadrement : 

dA m (£, X) m < A(0 m + |A| < C 2 A m (Ç, X) m . 
La majoration vient alors de l'inégalité : 

\px(0\<C(A(O m + \X\). 

Pour la minoration, on remarque que les hypothèses sur V entraînent l'existence d'un e > 
tel que — A| > et — A| > e|À|. Il existe donc C telle que : 

M0l>^(A(0 m + |A|). 

Lemme 1.2.2. 

Lorsque p est de plus un symbole polynomial, la famille (p\) vérifie les estimations : 

|£>A(OI<C a A m (£,Ar-H. 
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Ce lemme, à démonstration immédiate, est faux si p n'est pas un polynôme : il est en 
effet crucial que les dérivées s'annulent à partir d'un certain rang. On résume les deux 
lemmes précédents en disant que la famille (px)\ev appartient à la classe de symboles à 
paramètres : 

dont la définition procède directement des estimations du lemme 2, et est elliptique en 
tant que famille à un paramètre de symboles. En utilisant l'ellipticité de p\ et l'expression 
explicite des dérivées successives de p^ 1 on obtient classiquement le lemme suivant : 

Lemme 1.2.3. 

Pour tout À G V tel que |À| > R on a les estimations : 

|irl(£)|<C Q .A m (£,A)-™-H 



On se donne plus généralement un réel d > 0, on pose : 

A d (£,À) = (l + ||£|| 2 + |A|M 

pour £ G g* et À G "P, et on définit la classe de symboles à paramètre S™ d (g* ,V) comme 
l'espace des p\ vérifiant les estimations : 

|D> A (£)|<CaAd(£,Ar-'M 

Les semi-normes définies par les meilleures constantes C a possibles munissent cet espace 
d'une structure de Fréchet. On construit aussi les variantes analytiques AS™ d ® et AS r ^ d 
de manière évidente. Nous aurons besoin d'un calcul symbolique à paramètre, c'est-à-dire 
d'une version à paramètre du théorème 1.1.2. La démonstration, strictement parallèle à 
celle du théorème 4.2 de [Ml], est donnée en appendice. 

Théorème 1.2.4 (calcul symbolique à paramètre). 

Soit K un voisinage compact exponentiel de dans g, assez petit pour que (expK) 2 soit 
l'image difféomorphe d'un voisinage K 2 de dans g. Alors si p > \ il existe un voisinage 
compact Q de contenu dans K tel que la loi # s'étend en une correspondance bilinéaire 
continue : 

A£%ï Q (ff,V) x AS^ q {q\V) — > AS™ d +m2 > Q \Q\V). 
De plus dans le développement asymptotique : 

N 

p#q = Ck ( p ' q "> + r n(pi ?) 



les C k (resp. R N ) sont par ailleurs continus de AS™£ Q (q*,V) x AS^' Q (q\V) dans la 

Classe AS ^ d +m 2 -k(2 P -l),Q+Q (wsp _ A ^ +m2 :(Ar + i)( 2 p-l),(Q + Q)uQ 2 (gHt ^ ); _ 
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Soit Q un voisinage compact de dans g assez petit (voir § 1.1), soit x £ C°°(s) telle 
que x = 1 au voisinage de et soit, pour A G V et |À| > R, le symbole q\ G AS™'®(\) 
défini par : 

é = T Q {~). 



Px 



Lemme 1.2.5. 

Pour tout N G N et pour tout multi-indice a on a les estimations 

\D a (q{--)\<C ol , N A m (C^r N - 
Px 



Démonstration. Du lemme 1.2.3 on tire immédiatement les estimations : 

1 m \a\ 1 m M 

|£> a — (01 < C.A(0" T "~A(Am)-T- — . 
Px 

D'après le théorème d'approximation à paramètre (proposition 1.1.3) on a donc les esti- 
mations : 

\D a ±(£)\<C N , a A{t)- N A(\m)- N 
Px 

a A m 

(0 A)~ . 

• 

On déduit des lemmes 1.2.3 et 1.2.5 que le symbole à paramètre q\ vérifie comme p^ 1 les 
estimations du lemme 1.2.3. On supposera, quitte à rajouter une constante, que p\ ^ 
pour tout A G ? et pour tout A de module > r, ce qui permet de construire la résolvante 
sur le secteur V en entier ainsi que sur le disque de rayon r. 



Proposition 1.2.6. 

La famille de symboles : 

r\ = Px#q{ ~ 1 
appartient à la classe de symboles à paramètre AS^l^ (q* , V) 

Démonstration. On écrit : 

r x = {Px#q\ ~ Pxq\) + {pxq\ - 1), 
puis on applique le théorème 1.2.4 et le lemme 1.2.5. 
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Quitte à restreidre suffisamment le compact Q on peut construire une paramétrixe d'ordre 
N pour p\, en posant : 

JV-l 

«î r = «i#E(- 1 ) P W^ r[* = (rl)# N . 

Il est clair que l'on a : 

VxM = 1 + 

avec G AS 1 ^'^. Un raisonnement standard et un contrôle soigneux des supports des 
transformées de Fourier inverses ([M2] théorème 1.3.6) permet de construire une paramé- 
trixe qx G ASï™ ,Q d'ordre infini, c'est-à-dire telle que : 

rx = Px#Qx - 1 e Ç)AS-% Q (g*,V). 

N 

Un petit calcul classique (voir par exemple [He]) montre que la paramétrixe est bilatère, 
c'est-à-dire que l'on a également : 

r'x = qx#Px-lef]AS^ Q (ô*,n 

N 

Le calcul symbolique, l'approximation analytique et la construction de la paramétrixe 
préservent l'holomorphie par rapport au paramètre À. La résolvante qx est donc holomor- 
phe en À. 

1.3. Calcul fonctionnel holomorphe 

Soit p un symbole polynomial elliptique de degré m sur g*, et soit V un secteur angulaire 
de C tel qu'il existe R > tel que p(£) ^ V pour ||£|| > R. Soit ip une fonction holomorphe 
sur un voisinage conique ouvert V du complémentaire de V dans C — {0} et vérifiant : 

\<p(z)\ <c.(i + |z| 2 )i 

avec s < 0. Si a £ V et a > r > 0, et si s < la formule de Cauchy nous permet d'écrire 
pour tout a G C — V : 

2i7T J r A — a 



W=r/2 



Figure 1 
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où r C V est le contour ci-dessus, défini de la manière suivante : quitte à faire une rotation 
on suppose que le secteur V contient la demi-droite des réels négatifs. On se donne deux 
réels — 7T < a < b < n tels que les deux rayons d'argument a et b soient inclus à la fois dans 

V et dans l'intérieur de V, et on parcourt F en parcourant d'abord le rayon d'argument b 
jusqu'au cercle de rayon | (avec r < R), puis le cercle de rayon | dans le sens négatif, puis 
le rayon d'argument a en s'éloignant de l'origine. Compte tenu de la résolvante approchée 
construite en 1.2 on est donc amené à poser : 

Cette formule a un sens, la résolvante q\ construite au § 1.2 étant définie pour tout À G 

V U S(0, R), donc pour tout A G T. 



Proposition 1.3.1. 

# 

(pop appartient à la classe de symboles 



AS™ s,Q (d*)- 



Démonstration, dans la formule 



D a <ptp(tÇ) = -^J <p(\)D a q x (tt) dX 

on suppose t > 1 et on effectue le changement de variables A h- > t~ m X. Le contour Y est 
changé en Y t = t~ m Y et il est clair que pour toute fonction holomorphe sur V son intégrale 
sur Y t est indépendante de t. On a donc : 

D a tpîp(tO = --L-t™ j^{t m X)D a q tmX {tt)dX. 

On a donc les estimations : 

\D a ipîp(tÇ)\ < C.t m j |t m A| s (||^|| 2 + |t m A|m)-è(™+H)dA 

< C ,jm8-\a\ J |A| a (||£|| 2 + |A|^)-^ (m+|a|) rfA 

d'où le résultat. 
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Remarque : il est a priori surprenant que ce résultat ne fasse pas intervenir les dérivées 
successives de la fonction holomorphe (p. Mais les estimations : 



que l'on aurait envie d'imposer sont en fait automatiquement vérifiées pour £ G V. Pour 
le voir on part de la formule : 



et on fait le même changement de variable que dans la démonstration de la proposition 
1.3.1. On obtient donc : 



avec m, m' < 0. Alors la différence : 

# # # 

appartient à l'espace de Schwartz S (g*). 

Démonstration. On considère un contour r' très proche de T, mais situé tout entier du 
côté opposé à V par rapport à T, défini en parcourant d'abord le rayon d'argument b — e 
jusqu'au cercle de rayon r, puis le cercle de rayon r dans le sens négatif, puis le rayon 
d'argument a + e en s'éloignant de l'origine. On choisit e assez petit pour que les deux 
branches de V soient incluses dans V : 






Proposition 1.3.2. 

Soient deux fonctions <p et ip holomorphes sur V et vérifiant : 



\<p(z)\ < c a (i + \z\ 2 )f , |^)| < cji + n 2 )^. 




Figure 2 
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L'intégrale définissant <ç o p ou ip o p est la même en remplaçant V par V. 
Lemme 1.3.3. 

Soient À,/i £ C avec X ^ fi et tels que p ne prenne pas ses valeurs en fi et en X. Alors le 
symbole : 

r\,^ = q\#q^ - t (q\ - q») 

A — /i 

appartient à S(g*), et on a les estimations : 

| A — fi | 

les constantes Cn,œ étant indépendantes de X et \x. 
Démonstration. C'est une conséquence immédiate de la formule : 

9a#? m = t ~ q\ $ ( i,p -n)-(p- A))#Q M . 

A — fi 

On a donc grâce au lemme 1.3.3 : 

# # 1 f f 

ipop#^op= -— J J ^(X^f^qx^q^dndX 



JtJt' a — 



4/T 2 y r y r / À — /i 

où appartient à l'espace de Schwartz S(g*). En utilisant la formule de Cauchy pour ip(X) 
on obtient donc : 

# 

La première intégrale est égale à ((pip) ° p et la deuxième est nulle, la proposition 1.3.2 est 
donc démontrée. 



Lemme 1.3.4. 

si <f(z) = z~ k , k G N — {0}, le symbole <p o p — (qo)^ N appartient à S (g*). 

Démonstration. Compte tenu le la proposition 1.3.2 il suffit de démontrer le lemme pour 
N = 1. On a pour ip(z) = z~ l : 



^*V = -777- / A VdA 

Z27T Jy" 



où T" est un cercle centré à l'origine, de rayon petit, et parcouru dans le sens négatif. On 
a donc ^op = g . 
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Lorsque l'ordre de croissance s est positif on posera donc : 

<ptp = p# k #((z- k <p)îp). 

où k est le plus petit entier > —s. Compte tenu du lemme 1.3.4 les propositions 1.3.2 et 

I. 3.3 sont encore vraies dans ce cadre. En particulier si on considère la famille de fonctions 
(y?a)aec définie par : 

on a la propriété de groupe approchée : 

# # # 

ip a+h op-(ip a o p)#(>6 o p) e S(g*). 

Remarque : Nous n'avons pas pu définir (pop pour un symbole elliptique non polynomial 
dans AS™'® . En effet l'adaptation de la méthode de Seeley [S] n'est pas possible à cause 
de la nécessité de couper les hautes fréquences de la paramétrixe q\ d'ordre 1, ce qui annule 
le gain en décroissance par rapport au paramètre que l'on aurait pu obtenir si on avait 
pu prendre q\ = (p — A) -1 et non une approximation analytique. Or cette opération est 
inutile dans le cas d'une algèbre de Lie nilpotente (on dispose d'un calcul symbolique avec 
les classes de symboles "ordinaires" S™(q*), p> \ [M3]). On peut donc dans ce cas suivre 
# 

[S] et définir pop pour un symbole elliptique p G S™ (g*) quelconque. 

II. Front d'onde d'un vecteur-distribution 

Nous mettons en évidence 'a l'aide du calcul holomorphe de la première partie la 
régularité des opérateurs pseudo-différentiels p w ^ par rapport aux espaces de Sobolev H.%. , 
dont la définition est rappelée en II. 1. Nous définissons alors le front d'onde d'un vecteur- 
distribution, et nous dressons une liste de propriétés tout-à-fait analogues à celles du front 
d'onde d'une distribution. Les techniques employées sont standard ([D-H] § 6.1, [T] § 
VI.l). 

Nous établissons ensuite le lien avec le front d'onde de la représentation, et enfin nous 
appliquons cette construction à l'étude des vecteurs C°° et des vecteurs-distribution de la 
restriction de la représentation unitaire à un sous-groupe fermé. 

II. 1. Espaces de Sobolev-Goodman 

Soit G un groupe de Lie réel connexe, g son algèbre de Lie et g* son dual. Soit tc une 
représentation unitaire de G dans un espace de Hilbert H^. Soit 7i^° l'espace des vecteurs 
C°° de la représentation, dont le dual H~°° constitue l'espace des vecteurs-distribution. 

On se donne une base (Xi) i= i : ,,, jn de g, et on considère le laplacien positif : 

n 

a = -5>. 2 

1 
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dans l'algèbre enveloppante U(g). L'opérateur non borné n(l + A) est positif et essen- 
tiellement auto-adjoint [Ne], ce qui permet de définir ses puissances fractionnaires grâce 
au théorème spectral. 

On définit alors l'espace de Sobolev-Goodman H,^ comme le domaine de l'opérateur 

s_ 

7r(l + A) 2 [Go]. L'espace Ji% , indépendant du choix de la base, est un espace de Hilbert, 
le produit scalaire étant donné par : 

< U, V > s = < 7r(l + A) 2<u, yr(l + A) 2u . 

Dans le cas où G = M n et où 7r est sa représentation régulière, ces espaces coïncident avec 
les espaces de Sobolev usuels H s (R n ). Les vérifient les propriétés suivantes : 

1. Si s > t alors C et l'inclusion est continue. 

2. Le produit scalaire de Ti^ s'étend en une forme sesquilinéaire continue : H~ s x7i* — ► C, 
et de ce fait TC~ S s'identifie au dual de H^. 

3. L'espace des vecteurs-distribution est la limite inductive des TC^ lorsque s — > — oo, 
et TC^ est la limite projective des H.%. lorsque s — > +oo. 

II. 2. Opérateurs pseudo-différentiels sur les espaces de représentations 

On reprend les notations du § I. On associe [M2] à tout symbole p G AS™ (g*) 
l'opérateur de symbole de Weyl p dans l'espace de la représentation n, défini sur 7i^° 
par : 



p w,1T u= / T 1 p(x)n(exp x) dx. 



Cet opérateur est en général non borné lorsque m > 0, mais régularisant (c'est-à-dire qu'il 
transforme tout vecteur en vecteur C°°) lorsque p appartient à l'espace de Schwartz 5(fT). 
On rappelle [M2] que lorsque p G AS™ 1 '® et q e AS™ 2 ' Q avec p > \ et Q assez petit, le 
produit pj^q est bien défini et on a : 



Proposition II. 2.1. 

Soit p G AS™'®(q*) avec p > \ et Q assez petit. Alors p w,7r s'étend en un opérateur 
continu de dans H^~ m . 

Démonstration. Soit L(£) = 1 + < Xj > 2 . C'est un symbole polynomial elliptique 
d'ordre 2, et l'opérateur L w,7r est égal à 7r(l + A). Soit q\ une résolvante approchée de L. 
On applique le calcul fonctionnel du § 1.3 à L, de sorte que si l'on pose : 

# - 

p s = if o p avec ip(z) = z 2 

l'opérateur LY ,n — (L W,1T )^ est régularisant. On voit ceci en comparant les deux expres- 
sions : 
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et 



( L W,^§ = _J_ f \%( L W,n_ XI)' 1 d\, 

2itv Jy 



la deuxième expression ayant un sens si le rayon r choisi pour la construction du contour 
r est assez petit. En particulier LY ,1T est continu de TC^. dans 7-^ _s pour tout t. 



Lemme II. 2. 2. 

Pour tout symbole p d'ordre et pour tout réel s l'opérateur p w ^ est continu de dans 

Démonstration. On commence par montrer le lemme pour < s < 1. Soit u G Ti^ '. Les 
opérateurs p w,1T et (L s #p — p#L s ) w > n étant continus de H® dans H® on a les estimations 
suivantes : 

\\p w '"u\\ a < C.\\Lf^p w ^u\\ 

<C\(\\p w ^LY^u\\o + \\(L s ^p-p^L s ) w ^u\\o) 
<C"\\L^u\\ + C"'\\u\\ 
< C""\\u\\ s . 

Réitérant l'argument précédent en remplaçant H.® par Ti^ on démontre le lemme pour 
1 < s < 2, puis de proche en proche pour tout s > 0. Un simple argument de dualité 
permet alors d'étendre le résultat pour s < 0. 

• 

On finit la démonstration de la proposition en remarquant que si p est d'ordre m le 
symbole L- m #p est d'ordre 0, ce qui implique [M2 corollaire 1.4.2] que o p w ^ est 

borné de Ti^ dans Ti^. D'après le lemme II.2.2 cet opérateur o p w ' n est borné de 

H% dans H% pour tout s, donc L^' 71 'L^^p 1 ^^ est continu de H% dans H s 1T ~ rn . Comme 

l'opérateur L^^L^^ est égal à l'identité modulo un opérateur régularisant, ceci termine 
la démonstration de la proposition II.2.1. 

• 

Remarque : Nous avons exprimé les puissances fractionnaires de L w > n à l'aide d'une 
intégrale sur le contour T, ce qui est possible parce que L w ' n est auto-adjoint et L w,n — I 
est positif. Il est possible de faire de même en remplaçant L par n'importe quel symbole 
p elliptique vérifiant les conditions du § 1.3, à condition que la résolvante soit compacte 
(ce qui est le cas si la représentation est fortement traçable, voir par exemple [Hw], [M4]). 
En effet dans ce cas le spectre de p w,1T est discret, son intersection avec V est bornée donc 
finie, il est donc possible de choisir un contour F qui évite le spectre (voir [Shu § 9]). On 
définit ainsi Lp(p w,7T ) pour toute fonction <p holomorphe dans le secteur V, et en refaisant 
le calcul de la proposition 1.3.2 on montre que pour deux fonctions holomorphes <p et ip 
dans V on a : 

rtp w n°^(p w n = (^)(p w n- 
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II. 3. Définition et premières propriétés du front d'onde 

Soit p G ASp(g*) un symbole d'ordre zéro. On appelle ensemble caractéristique de p 
le cône défini par : 

charp = {£ G g* / lim infp(^) = 0}. 

On montre facilement que si p = 1 ce cône est fermé. On appelle front d'onde d'un 
vecteur-distribution u le cône fermé de g* défini par : 

WF(u) = [ ] char p. 

peas°(Q*) 

Le front d'onde d'ordre s du vecteur-distribution u est quant à lui défini pour tout réel s 
par : 

WF 8 (u) = p| char p. 

Les WF s (u) forment une famille croissante de cônes fermés dont la réunion est le front 
d'onde WF(u). Par ailleurs pour tout g G G on a la relation de covariance : 

Tr(g) o p w >« o nig)-^ (Ad* g.p) w >\ 

qui implique que WF(u) et WF s (u) sont covariants sous l'action coadjointe de G dans g* : 
pour tout g G G on a : 

WF(w(g)u) = Ad* g.WF(u) 

et de même pour le front d'onde d'ordre s. 

Le front d'onde défini ci-dessus vérifie quelques propriétés tout à fait similaires à 
celles vérifiées par le front d'onde d'une distribution. Rappelons [T § VI. 1] qu'un symbole 
p G S™ (g*) est d'ordre — oo sur un cône ouvert U si pour tout cône fermé K contenu dans 
U, pour tout iV G N et pour tout multi-indice a il existe une constante Cn^k telle que 
pour tout £ G K : 

\DÏ(0\<C N , a , K A(Ç)- N . 

Le support essentiel ES(p) d'un symbole p G SY l (g*) est le plus petit cône fermé de g* — {0} 
tel que p soit d'ordre — oo sur son complémentaire. Le développement asymptotique du 
produit # en opérateurs bi-différentiels entraîne l'inclusion : 

ES(p#q) C ES(p)f]ES(q). 

Les deux propositions suivantes résument les propriétés essentielles du front d'onde. La 
démonstration, laissée au lecteur, est strictement parallèle à celle donnée dans [T § VI. 1] 
dans le cas du front d'onde d'une distribution. L'ingrédient essentiel est l'existence d'une 
paramétrixe pour les symboles elliptiques. 
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Proposition II. 3.1. 

Pour tout cône fermé C tel que WF(u) D C = il existe un symbole q = 1 + a avec 
ES (a) H C = 0, tel que : 

q W ^u g H™. 



Proposition II. 3. 2. 

Soit u G H~°° et soit p un symbole dans AS™'® (g*), avec Q assez petit. Alors : 
1 ) Si ES(p) n WF{u) = alors p w ^u G H™. 

2) WF(p w ^u) C WF{u) H ES(p). 

3) WF(u) C WF(p w ^u) U charp. 

4) Sip est elliptique, WF(p w ^u) = WF(u). 

Le front d'onde d'ordre s admet également la caractérisation suivante : 
Proposition II. 3. 3. 

Soit £ G 0* — {0}. Alors £ WF s (u) si et seulement si on peut écrire u = u\ + u 2 avec 
u\ÇlH% etÇ<£WF(u). 

Démonstration. Si u admet la décomposition ci-dessus il est clair que £ ^ WF s (u). 
Réciproquement si £ ^ WF s (u) il existe un symbole p d'ordre zéro tel que p w ' n u G Ti^. 
et £ ^ char p. Il existe donc un voisinage conique fermé C de £ tel que p soit C-elliptique 
d'ordre zéro, c'est-à-dire vérifiant : 

Cr < \p( v )\ < c 2 

pour rj G C et assez grand. La construction de la paramétrixe (voir [He], [Hrl], [M2 
prop. 1.3.6] et aussi la démonstration de la proposition 1.2.6) se restreint sans difficulté 
au cône C : on part d'un symbole q± d'ordre zéro coïncidant avec 1/p sur C fl {||?7|| > R}, 
convenablement amputé de ses hautes fréquences. La construction de [M2 prop. 1.3.6] (que 
nous reprenons dans la démonstration de la proposition 1.2.6 dans le cas d'un symbole avec 
paramètre) aboutit à l'existence d'un symbole q d'ordre zéro tel que : 

qj^p = 1 + r 

avec ES(r) fl C = pour tout cône ouvert C C C. On pose alors : 

Ul = q vv ^p vv ^u et u 2 = r ' u. 

D'après la proposition II.2.1 u\ appartient à H^, et d'après la proposition II.3.2 £ n'appar- 
tient pas à WF{u2). 



18 



II. 4. Une autre caractérisation du front d'onde 
Proposition II. 4.1. 

Soit u G ' , et soit T u la distribution sur G à valeurs dans définie par : 

T u = n(.)u. 

Alors le front d'onde de u est égal à l'opposé du front d'onde en l'élément neutre de la 
distribution T u . 

Démonstration. Les vecteurs C°° sont caractérisés de la façon suivante : 
Lemme II. 4. 2. 

Pour tout p G AS q (q*), pour tout u G et pour tout N G N on a : 

\\ P ^u\\<c N H\- N , 

avec p v = p(rj + .). 

Démonstration. Si u appartient à la fonction ifj : x h-> J r ~ 1 p(x)ir(exp x)u est C°° à 
support compact, donc sa transformée de Fourier ip est à décroissance rapide sur g*. Or 
un petit calcul facile donne : 

Fin de la démonstration de la proposition II. 4.1 : D'après la proposition II.3.1 un £ G 
0* — {0} est hors de WF(u) si et seulement s'il existe un voisinage conique V£ de £ et un 
symbole q = 1 + a avec ES (a) D Vç = 0, tels que : 

q W ' n u G 

On peut supposer que V£ est convexe. Soit maintenant V un cône fermé contenu dans 
Vç. Pour tout rj G V le symbole = 1 + a v vérifie q^ ,n u G et le support essentiel 
du symbole à paramètre a,, ne rencontre pas Vç. Le support essentiel de r- v est quant 
à lui contenu dans Vç. Les supports des transformées de Fourier inverses de r- v et a v 
sont indépendants de rj. Supposant ces supports assez petits on peut considérer le produit 
r-^^Ojj. Considérant le développement du produit # en opérateurs bi-différentiels ainsi 
que l'expression explicite du reste donnée en appendice on montre : 

r_ v #a v eAS-°°(Q*,V). 

On en déduit que r^^a^^u est à décroissance rapide en rj, et donc finalement que r^' n u 
est aussi à décroissance rapide en rj G P, et ce pour tout r G AS(q*), ce qui veut dire que 
£ n'appartient pas à — WF(T U ). L'inclusion réciproque, laissée au lecteur, se démontre en 
remontant le raisonnement. 
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Il nous reste à comparer le front d'onde d'un vecteur-distribution avec le front d'onde 
d'une représentation tel qu'il a été défini par R. Howe [Hw]. Le front d'onde WF n de 
la représentation 7r est une partie conique fermée de T*G — {0} invariante par transla- 
tion à gauche et à droite. Il est donc entièrement déterminé par son intersection WF% 
avec l'espace cotangent en l'élément neutre, qui est un cône fermé Ad* G-invariant de 
g* . Le critère vii) du théorème 1.4 de [Hw] montre que WF% est le front d'onde en e 
de la distribution 7r(.) à valeurs opérateurs. L'analogue de la proposition II.4.1, dont la 
démonstration est identique, nous donne une définition alternative pour le front d'onde 
d'une représentation unitaire : 

Proposition II. 4. 3. 

WF* = - p| char p. 

p w,iT régularisant 

En corollaire immédiat nous avons l'inclusion : 

WF{u) C -WF* 

pour tout vecteur-distribution -u, et plus précisément : 

WF% = - U WF{u). 

Soit maintenant u G Ti.^°°, soit <p une distribution à support compact sur G, et soit 
ir((p) l'opérateur (non borné) qu'elle définit sur l'espace Ti^. Le domaine de 7r(<p) contient 
7i£°. A quelle condition le vecteur ir((p)u est-il un vecteur C°°? 

La réponse à cette question est un analogue du théorème III. 7 de [M4] pour un vecteur- 
distribution : désignons par WJ-'(u) la plus petite partie conique fermée de T*G — {0} 
invariante par translation à gauche et à droite contenant WF(u). 

Proposition II. 4. 4. 

Supposons que H n soit un espace de Hilbert séparable. Soit u G H~°° . Alors pour toute 
distribution (p G £'(G) telle que : 

WF((p) n WF(u) = 0, 

on a : 

TTfoOti G H?. 



20 



Démonstration, comme la convolution par un élément de l'algèbre enveloppante respecte 
le front d'onde, il suffit de montrer que n((p)u appartient à Ti^ pour toute distribution 
ip G S' (G) vérifiant les conditions du théorème. On procède alors comme pour le théorème 
III. 4 de [M4]. On remarque d'abord (cf [M4], prop. III. 2 et corollaire III. 3) que le front 
d'onde de la convolée ip* *ip ne rencontre pas WJ(«). Pour tout v G H~°° le front d'onde 
du coefficient-distribution : 

C UjV =< n(.)u, v > 

est contenu dans — WJ(u). C'est en particulier vrai pour le coefficient-distribution diago- 
nal C UjU . 

Désignons par p t le noyau de la chaleur sur le groupe G. Lorsque t tend vers la 
quantité ||7r(pt) 7r (¥>)' u ll2 converge en croissant vers l =< (<p* * (p).C u>u , 1 >, la condition 
sur les fronts d'onde rendant licite le produit des deux distributions. Par ailleurs si (e^) 
désigne une base orthonormée de H-n formée de vecteurs C°°, on a : 

\\-ïï{pt)^{^p)u\\l = ^2 \ <u, n(pt)iv(ip*)ei > | 2 . 

i 

Il résulte du théorème de convergence monotone que la somme : 

| < tt, n{ip*)ei > | 2 = ^ | < Tr((p)u, ei > | 2 

i i 

converge vers la limite finie t ci-dessus, ce qui veut dire que u appartient à Ti. n . 
II. 5. Restrictions 

Soit G un groupe de Lie connexe, ir une représentation unitaire de G et H un sous- 
groupe fermé de G. On note comme précédemment 7i^°, n~°° et Tt^ l'espace des vecteurs 
C°°, des vecteurs-distribution et de Sobolev-Goodman respectivement, pour la représenta- 
tion 7r. On note TL^ , et H^. les espaces analogues relativement à la restriction de 

tt au sous-groupe H. 

Soit (Xi, . . . , X m ) une base de l'algèbre de Lie f) du sous-groupe if, que l'on complète 
en une base Xi, . . . ,X n de l'algèbre de Lie g de G. Considérant les laplaciens respectifs 

Aq = —{Xl H h X 2 ) et A H = ~(Xf H h X^) du groupe G et du sous-groupe H, 

l'espace H.%. (resp. H^. ) est le domaine de l'opérateur n(l + Ag) s (resp. n(l + A#) s ). 

\h 

On a donc les inclusions suivantes : 
Proposition II. 5.1. 

'ht 00 G 'hC 00 l~t — 00 G 7~C~ 00 

TV 7T I TV I TV 

n% c ni si s > o cKas<o 
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On peut se demander inversement à quelle condition un vecteur C°° pour tt\ est un 

\h 

vecteur C°° pour tt, et à quelle condition un vecteur-distribution pour tt est un vecteur- 
distribution pour la restriction tt i : 

Théorème II. 5. 2. 

1 ). Soit u G H°° . Considérant alors u comme un vecteur-distribution de tt on a l'inclusion : 

WF(u) C t) ± . 

2). Soit v G H~°° . Alors si WF{v) fl f) = le vecteur-distribution v est un vecteur- 
distribution pour la restriction tt i . 

Démonstration. Soit £ ^ f) . Alors il existe un voisinage conique V de £ tel que le symbole 
polynomial q(£) = 1 + Ci + ' " " + Cm s °it V-elliptique d'ordre 2, c'est-à-dire qu'il vérifie : 

^iA(0 2 < Q(0 < C 2 A(0 2 

pour tout £ G V. Pour tout entier positif k le symbole q# k est alors V-elliptique d'ordre 
2k. Il existe donc un symbole s k tel que ES(sk) fl V = et tel que : 

q* k = r k + s k 

où r k est elliptique d'ordre 2k. Soit r_ k une paramétrixe pour r^. Soit u G 7i^° . On a 
alors : 

r^{q* k ) w ^u = (r. k #r k ) w ^u + (r. k #s k ) w ^u, 

soit encore : 

u = -{r. k #s k ) w ^u + r W £{q* k ) w ^u + (1 - r. k #r k ) w ^u. 

£ n'appartient pas au front d'onde du premier terme grâce au 2) de la proposition II.3.1, 
le deuxième terme appartient à 7i^. fc grâce à la proposition II.2.1 et grâce au fait que 
(q^ ) w,n u appartient à Ti. n pour tout /c, et enfin le troisième terme appartient à H 1 ^ par 
définition d'une paramétrixe. On a donc : 

U = Ui +u 2 

où £ ^ WF{u\) et ui G r H.2k, ce qui équivaut au fait (cf prop. II.3.3) que £ n'appartient 
pas à WF 2k {u). Ceci étant vrai pour tout k on en déduit le 1) du théorème. 

Pour démontrer le 2) on considère uni) G tel que WF{v) fl f) -1 =0. D'après la 

proposition II.3.1 il existe alors un symbole p = 1 + r avec p w > 1T v G 7i£° et ES(r) fl f)^ = 0. 
Pour tout entier k > on considère alors une paramétrixe ô k pour le symbole (1 + £i + 
• • • + Cm)^ h vu comme elliptique sur ()*, et on en fait un symbole sur $j* en posant : 

£/c(e) = ^(e+^) 
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moyennant l'identification de ()* avec 0*/^- On voit alors que £fc#r est un symbole 
d'ordre —2k sur g*, et donc d'après la proposition II.2.1 (1 — A H )~ h r w > n envoie dans 
H^ +2h . On écrit alors : 

çW.tt xW.it W.tt /e ;; \W,ir 

à k ' v = à k p vv,7T v - {o k #ry v ^v 
d'où finalement, si v appartient à H'^ on a : 

(1- A H )~ k v eK +a . 

d'où (1 — An)~ k v G H n pour k assez grand, ce qui veut dire que v est un vecteur- 
distribution pour la restriction tt\ . 

I H 

III. Propagation des singularités 



III. 1. Symboles classiques 

On désigne par Cl m (g*) la classe des symboles classiques d'ordre m, c'est-à-dire qui 
admettent un développement asymptotique : 

P - Pm+Pm-l H 

où Pm-j est positivement homogène de degré m — j. On note ACl m '® et ACl m les inter- 
sections Cl m DAS™'® et Cl m (lAS™ respectivement. D'après le théorème d'approximation 
il existe pour tout p G Cl m un symbole p dans A Cl m '^ ayant le même développement 
asymptotique que p. On appelle symbole principal le terme positivement homogène de 
plus haut degré. 

III. 2. Une forme faible de l'inégalité de Gârding précisée 

On peut établir une inégalité de Gârding qui s'énonce ainsi : lorsque p est un symbole 
hypoelliptique positif il existe une constante C telle que p w '^ + CI soit un opérateur positif 
[M2 prop. 1.4.1]. Lorsque p est seulement supposé positif sans hypothèse d'hypoellipticité 
un substitut possible est une forme faible de V inégalité de Gârding précisée : 



Théorème III.2.1. 

Soit p G AS™'®(q*) avec p > \ et Q assez petit. On suppose p(^) > pour tout £ G 0*. 
Alors pour tout e > il existe une constante C e telle que pour tout u G 7i£° •' 

< p W ' n U, U >> -C e \\u\\ 2 m - (p - 1/2 -e) • 



23 



Démonstration. On se ramène à l'inégalité de Gârding simple de la façon suivante : soit 
mo = m — (p — \ — s). On suppose e < p — |, de sorte que nio < m. On pose : 

Pmo(0=P(0 + A(O m ° 

et pose p mo = T^(p mo ) (cf § 1.1). On a l'encadrement : 

C 1 A(0 m °<Pm (0<C2A(0 m , 

et les estimations : 

iD> mo (e)i<c;A(o (p - m+mo)|Q| 

ce qui veut dire que p mo est un symbole hypoelliptique appartenant à la classe : 

AHS™' mo ' Q (Q*) 

avec ô = p — m + îtiq = \ + e. Il existe donc [M2 prop. 1.3.7] une racine carrée approchée 
q mo E AHSf 2 ' mo/2 ' Q telle que : 

avec r mo G 5(0* ). On en déduit : 

< P ygu, u >>< r%?u, u >, 

d'où finalement : 

< p w ^u, u>=< pZ'^u, u> + < (A mo ) w > n u, u > 

> C mo |M| mo / 2 + Cm„,sll u lls 

d'après la proposition II.2.1. Posant s = m /2 on a donc le résultat. 



III. 3. Théorème de propagation des singularités 

On rappelle qu'une bicaractéristique d'une fonction a G C°°(g*) est une courbe 
intégrale du champ hamiltonien H a . Comme on a : 

H a .a = {a, a} = 0, 

la fonction a est constante le long de ses bicaractéristiques. Une bicaractéristique nulle est 
une bicaractéristique sur laquelle la fonction a s'annule. 

Nous pouvons maintenant énoncer le résultat principal, dont la démonstration occu- 
pera le reste du paragraphe : 
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Théorème III. 3.1 (Propagation des singularités). 

Soit p G AC\ m (Q*), soit a la partie réelle du symbole principal p m de p. On se donne un 
segment 7 : [to, t±] — > 0* — {0} de bicaractéristique nulle pour a, et on suppose que la partie 
imaginaire de p m est positive sur un voisinage de 7. 

Soit u un vecteur-distribution tel que WF s (p w > n u)n~f = 0. Alors pour tout ô g]0, l/2[, 
si 7(£i) i WF s+m - 5 (u) on a : WF s+m - ô (u) H 7 = 0. 

Démonstration. Nous suivons de près la démonstration de M.E. Taylor [T. § VI. 2] pour 
une distribution sur une variété. La seule différence notable est la nécessité de se limiter 
à ô < 1/2 dans notre contexte, alors que l'on peut prendre 5 = 1 dans le cas d'une 
distribution. Cette restriction est déjà présente dans la forme faible de l'inégalité de 
Gârding précisée (Théorème II.4.1), et provient en définitive de la restriction "p > 1/2" 
dans le calcul symbolique. 

On peut se ramener au cas où m = ô : pour ce faire on multiplie p w > n à gauche par 
un opérateurs e w,lz où e est réel elliptique d'ordre ô — m. Le symbole principal de ej^p est 
es-mPmi sa partie réelle est ae m , et il est facile de voir que les bicaractéristiques de a et 
de apra sont les mêmes. 

On suppose donc p d'ordre ô. Par ailleurs si le théorème est démontré pour une valeur 
particulière de s on l'obtient pour les autres valeurs en appliquant à -u un opérateur q w ' n 
avec q elliptique d'ordre bien choisi. Dans la démonstration on peut donc supposer que s 
est tel que u G H^~ 5 ^ 2 . 

Soit donc 7 : [to, £1] — > 0* — {0} un segment de bicaractéristique nulle pour a — IZeps, 
soit C un voisinage conique de 7, et soit Ai une partie bornée de AS((q*) constituée de 
symboles de A5 , ^ _(5 (0*) à valeurs réelles, d'ordre s — ô, et dont le support essentiel est 
contenu dans C. On considère la décomposition : 

p = a + ib 

avec b > sur C. 
Lemme III. 3. 2. 

Il existe deux constantes Ci et C2 telles que pour tout c E Ai on a l'encadrement : 
- < {a,c 2 } w '> u > -CiHc^H 2 <lm< c w ^p w ^u, c w ^u > +C 2 < C 2 + 

+ h\\ c W^ u f + llc W,n p W,n ull 2y 
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Démonstration. La seconde inégalité est immédiate. Pour la première on écrit : 

Xm < c w ^p w ' v u, c w ^u > = TZe< b w ^c w '^u, c w '^u > 

+ TZe< [c w ^,b w ^]u, c w '^u> 
+ Xm< [c w >*,a w >*]u, c w ^u >, 

et on minore successivement les trois termes du membre de droite. Comme b > sur C, 
l'application de l'inégalité de Gârding précisée (théorème II. 4.1) avec e = 1/2 — 5 donne 
pour le premier terme : 

< b w >*c w >"u, c w ^u >> -C.\\c w ^u\\ 2 

où la constante C ne dépend pas de c G M.. Pour la minoration du deuxième terme on 
écrit : 

< [c w ' v , b w *}u, c w ^u >=< c w '*[c w '*, b W7T ]u, u > . 

Le symbole principal de l'opérateur c^- 1 ^' 1 , b W7T ] est zc{c, b} qui est purement imaginaire 
et d'ordre 2s — 5 — 1. Compte tenu des propriétés du calcul symbolique le symbole principal 
de la partie réelle est donc d'ordre 2s — ô — 2. L'opérateur c w ' 7r [c w, ' K ,b W7r ] envoie donc 
continûment Hl~ 5/2 dans n~ s+2+5 / 2 , et d' après les hypothèses sur Mona les estimations : 

\\c W ^[c W >\b W *]u\\ ^ 35 < C\\u\\ S 
s+2 2 s 2 

où C la constante C est indépendante de c G M.. Comme 5<l/2onaa fortiori : 

\\c w ^[c w ^,b w *]u\\_ s < C\\u\\ _s- 

s+ 2 s 2 

On en déduit donc une minoration pour le deuxième terme : 

TZe < [c w ^,b w ^]u, c w >*u >> -C" 

où C" est indépendante de c G M.. Enfin pour le troisième terme on remarque que le 
symbole principal de l'opérateur c w '' K [c w '' n ' 7 a WlT ] est ic{c,a} = |{c 2 ,a} qui est d'ordre 
2s - ô - 1, et que l'opérateur c w > n [c w > n , a WlT ] - ic{c, a} w ^ est d'ordre 2s - ô - 2. Par un 
raisonnement analogue on obtient la minoration : 

Xm < [c w ^, a w '>, c w >*u >>\< K c 2 } w ^u, u > -C" 

où la constante C" est indépendante de c G M.. Réunissant les trois minorations on en 
déduit le lemme. 
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Lemme III. 3. 3. 

Soit e = {a, c 2 } — (2Ci + l)c 2 où Ci est la constante donnée par le lemme III. 2. 2. Alors il 
existe une constante C3 indépendante de c E Ai telle que : 

lie < e w ' n u, u><C 3 . 



Démonstration. Cela découle facilement du fait que l'ensemble {c w,7r p w,n u, c E Ai} est 
borné dans H®. 

• 

Nous allons maintenant construire une famille Ai particulière vérifiant les propriétés de- 
mandées. Nous aurons pour cela besoin du lemme suivant : 

Lemme III. 3. 4. 

Supposons que le champ hamiltonien H a soit non radial en 7(^0)- Soit U un voisinage 
conique de 7(^1). Alors il existe trois symboles c, ao, ai tels que : 

1) c est positivement homogène de degré s, a son support dans C, et c(£) < pour tout 

t * iv {<>!• 

2) {a, c} > sur C\U et {a, c} > sur -y\U. 

3) ao G S1(q*) et {a, ao} = 1 sur un voisinage de 7. 

4) ai G Sl(g*) et {a, ai} ne s'annule pas sur 7. 

Démonstration. Remarquons tour d'abord que si le hamiltonien H a est radial en 7(to)> 
alors par homogénéité de H a la bicaractéristique passant par 7(^0) est elle aussi radiale. 
Comme les fronts d'onde sont par définition coniques le théorème III. 3.1 est trivial dans 
ce cas-là. 

Supposons donc le champ hamiltonien H a non radial en 7(^0)- H existe alors une 
hypersurface conique Ocg*- {0} passant par 7(^0) et transverse à à H a dans un voisinage 
conique de 7(^0) • Soit g G C°°(q* — {0}), positive, positivement homogène de degré s, et 
telle que #(7(to)) > 0. On résout alors l'équation de transport : 

H a .c = g 

ci = 0. 
I n 

ce qui nous donne un symbole c positivement homogène de degré s et tel que {a, c} > 
sur 7. Quitte à le tronquer on obtient facilement un symbole c vérifiant les conditions 1 
et 2 du lemme. La construction de ao et ai se fait de manière analogue. 
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Fin de la démonstration du théorème : on définit la famille M. par : 

M = {T Q c x , £ , < s < 1} 

où À est un réel à fixer ultérieurement et est l'opérateur de régularisation du § 1.1. Le 
symbole c\ j£ est quant à lui défini par : 

On pose également : 

eA,e = {a,< e }-(2Ci-l)c£ )e 

= ({a,c 2 } + (2A - 2Ci - l)c 2 )e 2Aa °(l + e 2 ^)" 1 . 

Fixons A > i(2Ci + l). Le symbole ({a, c 2 } + (A-2Ci -l)c 2 )e Aa ° est d'ordre 2s, positif sur 
C\W et strictement positif sur ^y\U. Il existe donc g et r symboles positivement homogènes 
d'ordre s positifs sur C avec supp q C U et r > sur C tels que : 

r 2 < ({a, c 2 } + (A - 2Ci - l)c 2 )e Aa ° + q 2 , 

ce qui s'écrit encore : 

<?£ + eA, e - r\ > 0, 
avec r e = r(l + ea 2 ) -1 / 2 et g e = ç(l + eaf ) -1 / 2 . 

L'inégalité de Gârding précisée (Théorème II. 4.1) s'applique au T^(g 2 + e\ j£ — r 2 ) qui 
est positif à un élément de S(q*) près. On a donc : 

~ W,tt ~W tt ~ W,ir 

< r 2 u, u ><< e x ' e u, u > + < u, u > +C4, 

(le tilde sur un symbole signifie qu'on lui applique l'opérateur de régularisation T®) d'où 
on tire facilement : 

ll~ 1 1 2 ~W,ir , . 1 1 ~ W.tt 1 1 2 1 rt 

\\ r eU\\ << e x ' £ uu > +\\q s || o -(- 4 

Les constantes C4 et C5 sont indépendantes de e. En faisant tendre e vers zéro on a donc : 

ll^ullo < C 5 

avec un symbole r qui est C-elliptique, c'est-à-dire qui vérifie : 

pour ||£|| assez grand. Il existe donc (cf. la démonstration de la proposition II.3.2) un 
symbole a d'ordre —s tel que : 

a#F =1 + 6 

avec ES(b) fl C = 0. On a donc la décomposition : 

u = a w >*T W *u - b w ^u 

avec a^^r^^u G H.%. et 7 fl WF(b w,n u) = 0. D'après la proposition II.3.2 ceci implique 
que WF s (u) ne rencontre pas 7. 
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Si le symbole principal p m est réel on peut inverser la direction du temps. Au vu de 
l'égalité : 

WF(u)\WF(p w >"u) = IJ D WF s+m _ s (u)\WF s (p w ^u) 

t s>t 

on a : 

Corollaire III.3.5. 

Soit p G ACÏ m (g*) dont la partie principale p m est réelle. Alors pour tout vecteur- 
distribution u, pour tout réel s et pour tout ô g]0, 1/2 [, l'ensemble : 

WF s+m _ s (u)\WF s (p w ^u) 

est invariant par le Bot du champ hamiltonien H Pm , de même que l'ensemble : 

WF(u)\WF(p w ^u). 

Appendice : calcul symbolique à paramètre 

Nous démontrons ici le théorème 1.2.4 en adaptant la démonstration du théorème 4.2 
de [Ml]. Soit V un espace vectoriel réel de dimension finie et V un cône fermé dans un 
espace vectoriel normé quelconque (typiquement, un secteur du plan complexe comme au 
§ 1.2). La structure de Fréchet de l'espace S™ d (V,V) est donnée par les semi-normes : 

^T(pa) = su P A d (£,À)-™ + ^lp> A (0|. 

On considérera également la famille de semi-normes indexée par N : 

P™d k M = sup N™f(p x ). 

\a\<k 

Pour tout voisinage compact Q de dans V le sous-espace AS™ d ®(V, V) de S™ d (V, V) est 
fermé. On désigne par AS~ CC,, ®(V, V) l'intersection lorsque m parcourt M des AS™ d ®(V, V). 
C'est l'ensemble des p\ tels que T~ x p a son support inclus dans Q, qui appartiennent à 
S(V) pour tout À et tels que les semi-normes : 

su P A(O m |^>A(OI 

soient à décroissance rapide en À G V. Dans la suite on prendra V = g* ou V = q* x q* . 
Lemme A.l (cf. [Ml prop. 2.5]). 

Soit Q un voisinage compact de dans V, et soit ip une fonction analytique sur V* dont 
la série entière à l'origine converge sur Q. Alors l'opérateur ip(D) = T o ip o JF -1 envoie 
continûment AS™ d Q (V,V) dans AS™ d Q (V,V). 
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Soit maintenant W un voisinage étoilé de dans l'algèbre de Lie q tel que (ex.pW) 2 
soit l'image difféomorphe par l'exponentielle d'un voisinage W 2 de 0. Pour tout t G [0, 1] 
et pour tout x, y dans W on pose : 

x . y = t -1 Log(expta. expty) 

t t 2 

= x + y + - [x, y] + — ([x, [x, y]} + [y, [y, x]]) H 

En appliquant la formule de Taylor en t = 1 à : 

f f _i _i —i<x.y,^> 

P\#Q\(€) = F~ P\(x)F~ q\(y)e * dxdy 

t J Jgxg 

on obtient le développement asymptotique en opérateurs bidifférentiels donné dans l'énoncé 
du théorème, avec : 

1 f f _■■ _•■ d k -i<x.y,£> 

C k {p\,q\){Ç) = -jjjj T P\{x)F q\{y)-^^_e * dxdy, 

et 

Rn(px, <Za)(£) = ^ J q (1 " t) N JJ ^Pxix^-'qxiy)^' 1 ^^ dxdy dt. 

On rappelle le résultat suivant : 

Lemme A. 2 ([Ml lemma 4.3]). 
Pour tout k > on a : 

d k -i<x.y,t> -i<x.y,(,> 

* =ip k (x,y,Ç,t)e 

où ipk est une fonction analytique polynomiale en £, dont la série entière à l'origine converge 
pour tout t G [0, 1] et x, y G W. On a plus précisément : 

k 

où ^ r k est polynomiale homogène de degré r en £. De plus le développement en série entière 
par rapport à t s'écrit : 

s>k+r 

où ip r k ,s est polynomiale en les variables x,y,Ç, de valuation > r par rapport à x, de 
valuation s par rapport à (x, y), de valuation > r par rapport à chacune des variables x et 
y, et homogène de degré r par rapport à £. 
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Le lemme A. 2 entraîne immédiatement que les Ck sont des opérateurs bi-différentiels à 
coefficients polynomiaux qui réalisent pour tout voisinage compact Q de dans W une 
correspondance bilinéaire continue : 

AS™ï Q (s*,V) x AS™ 2 d > Q ( ô \V) — > AS2d +m2 ~ {2p ~ 1)KQ+Q (QW). 

La difficulté réside donc dans l'estimation du reste Rn- On considère [Me2] pour tout 
t G [0, 1] l'application : 

Sf.W xW — >gxg 
1 

(x,y) — ► -(x - y + x.y, y - x + x.y). 

Il existe un voisinage ouvert fi C W tel que pour tout t G [0, 1] cette application S t 
soit un difïéomorphisme sur son image. On notera K t le jacobien de St- 

Soit Q un voisinage compact de dans g contenu dans fi. On considère l'opérateur 
B t défini sur AS-°°> QxQ (q* x q\V) par : 

B*Pa(£, »/)=// ^ _1 (pa)(x, |,) e -*<*(«.v), tt,i)> rfx dyj 

J Jgxg 

de sorte que l'on a : 

PA#«A(0 = *t(PA® ? A)(£,0- 
t 

Le reste Rn s'écrit donc, grâce au lemme A. 2 : 



R N {px,qxm = j r[ j\l-t) N JjF-\px®qx){x,y)^^ 

= -Lj\l- t) N (B t o $ N+1 (D U D 2 , d, 6, *))(PA ® <Za)(£, 0, 

où V'A r +i(-Di, -D27 £ 5 t) es t l'opérateur pseudo-différentiel (au sens classique) sur $j* x q* 
de symbole à gauche : 

~ £ + V 

ij> N+1 (x,y,Ç,Ti,t) = ij> N+1 (x,y, — g— ,*)• 



Lemme A. 3 (cf. [Ml prop. 3.6]). 

Pour tout G AS~°°' QxQ (q* x 0*,P) ou a les estimations 

PiSiBtPx) < CP- 2 d n - lfi (px). 
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Démonstration. On a la suite d'inégalités : 

\B t px(0\ < I l^Px^dx 
Jq 

< VolQ.SUp|J îr " 1 pA(x)| 

X 

<VcAQ. [ \ P x(0\dÇ 

Jg* xg* 

< VolQ.supA d (? 7 ,A) 2 "+ 1 b A (7 ? )| / AdCCA)" 2 "- 1 ^, 

V Jg*Xg* 

d'où le résultat. 

A partir de la définition de l'opérateur Et il est facile d'obtenir les deux lemmes suivants : 
Lemme A. 4 [Ml lemma 3.7]. 

Pour tout multi-indice a et pour tout t G [0, 1] on a l'égalité suivante entre opérateurs sur 

AS -°o,QxQ( g * x . 

D a oE t = E t oS t {D) a 



Lemme A. 5. 

Soit k = 1, . . . , 2n une coordonnée sur q* x q* . Alors : 

i=l 

où Rki,t(x) désigne le coefficient (k,i) de la matrice jacobienne de St en x. 
A partir de l'écriture : 

BtP\(fL, V) = [[ F'Hpx) ° SrHx, y)e~ i < x ^ ^>K t (x, y)" 1 dx dy 

J Jgxg 

obtenue à partir de la définition en effectuant le changement de variable x' = S t (x) on 
obtient également : 

Lemme A. 6 [Ml lemma 3.8]. 

Soit k = 1, . . . , 2n une coordonnée sur q* x g*. Alors : 

& o E t = E t o Ç£(Pki,t o S t )(D)ti + (-jpr- ° s *) ( D )) > 

1=1 t 

où Pki,t(x) désigne le coefficient (k,i) de la matrice jacobienne de S^ 1 en x. 
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En combinant les lemmes A. 4 et A. 6 avec le lemme A.l on arrive à permuter l'opérateur 
Et avec n'importe quel opérateur différentiel à coefficients polynomiaux : 

Lemme A. 7 [Ml prop. 3.9]. 

Soit P un polynôme à An variables, et soit P(£, D) un opérateur différentiel à coefficients 
polynomiaux sur g* x g* qui admet P comme symbole pour un certain choix d'ordre des 
variables (£i, . . . , ^2n, Di, ■ ■ ■ , P>in)- Alors si P est de degré j par rapport aux variables £ 
et de valuation v par rapport aux variables D, pour tout t G [0, 1] on a : 

P(Ç,D)oE t = E t oP t 

où Pt est un opérateur (en général non-différentiel) qui envoie continûment AS™'® X ® (g* x 
g*,V) dans AS™ +j -P v > QxQ (g* x g*,V). 

A partir des lemmes A. 3, A. 5 et A. 7 on obtient les estimations fondamentales pour 
l'opérateur E t : 

Lemme A. 8. 

Pour tout entier positif k et pour tout réel m il existe un entier M(k) et une constante C 
tels que pour tout t G [0, 1] et p G AS® (g* x g*) on a : 

C/(%)<^ MW (Pa). 

Démonstration. On suppose d'abord que m < 0. On considère pour tout multi-indice a 
le plus petit entier pair fj, a plus grand que —m + p\ot\. En appliquant le lemme A. 6 aux 
opérateurs : 

A d (£)^ZT, \a\ < k 

on obtient les estimations : 

P^\B t Px)<C.PZ 2n ~ Z ' M{k) M- 

Si m > on applique ceci à p' x (0 = A) -m £>a(£) où \i est le plus petit entier pair plus 
grand que m, et on applique le lemme A. 5. On obtient donc les estimations suivantes pour 
tout réel m : 

p™à k (etPx)<c.p™ d - 2n - 5 ' M(k \px)- 

Enfin la formule de Taylor à l'ordre appliquée à t — > E t p\{C) permet de développer E t 
en une somme d'opérateurs différentiels plus un reste, ce qui permet pour N assez grand 
de se débarrasser du décalage en 2n + 5. 

• 

Proposition A. 9. 

E t se prolonge en un opérateur continu de AS™f x Q (g* x g* , V) dans AS™f xQ (g* xg*,V). 
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Démonstration. Si AS~ QO ' QxQ (g* x g\V) était dense dans AS™f xQ (g* x g*,V) on 
pourrait conclure immédiatement, mais ce n'est pas le cas. On introduit la topologie 
de Hôrmander [Hrl § 3], définie de la façon suivante : une suite p n ,\ converge vers p\ 
au sens de Hôrmander si elle converge vers p\ au sens C°° (sans supposer d'uniformité 
par rapport au paramètre À) en restant bornée dans AS™^ X ® (g* x g*,V). On montre 
facilement que B t est continu aussi pour cette topologie, et que AS~°°' < ^ X( ^ (g* x g* \V) est 
dense dans AS™^ xQ (g* x g*,V) en ce sens, ce qui permet de conclure. 

• 

Le lemme ci-dessous est une conséquence du lemme 1, et le suivant découle essentiellement 
de la règle de Leibniz : 

Lemme A. 10. 

L'opérateur pseudo-différentiel ipN+i{D\-, D 2 , £, i], t) envoie continûment AS™^ X ® (g* x 
g*,V) dansAS™/ N+1){2p - 1} ' QxQ (g* x g*,V). 



Lemme A. 11 [Ml prop. 2.10]. 

La restriction à la diagonale est continue : 

AS™f xQ (g* x *,P) ^AS™f(g*,V). 



Fin de la démonstration du théorème 1.2.4 : Si (p\, q\) i— > p\ <8> q\ réalisait une correspon- 
dance bilinéaire continue : 

A£Ç£ Q (g*,V) x AS™ï Q (g*,V) ^ A S™f m ^ QxQ {g* x g*,V) 

le théorème 1.2.4 serait démontré. L'assertion est malheureusement fausse, mais on a 
facilement les estimations suivantes pour p\,q\ dans AS~°°'Q(g* , V) : 

En écrivant le développement asymptotique de Rn en opérateurs bidifférentiels : 

N' 

Rn = ^ Ci + Rn> 

i=n+i 

pour N' assez grand (dépendant de k) et en appliquant la proposition A. 9, le lemme A. 10 
et le lemme A. 11, on voit qu'il existe un entier M(k) tel que : 

Piï +m2 ' k (RN(px,qx)) < C.P^ d M{k \p x ).P^ k \q,). 

Un argument de densité analogue à celui de la démonstration de la proposition A. 9 permet 
alors de conclure. 
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